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(54) Title: METHOD FOR AUTOMATICALLY IDENTIFYING A DIRECTED STRUCTURE 
^ (54) Bezeichnung: VERFAHREN ZUR AUTOMATISCHEN ERKENNUNG EINER GERICHTETEN STRUKTUR 

^ (57) Abstract: In order to be able to automatically identify the location and orientation of a directed structure in a digital image, 
the invention provides a method in which the digital image is subdivided into preferably interconnected blocks. For each block, 
at least one texture characteristic is determined, which represents a measure for the structuring of the blocks along predetermined 

tH predominant directions, and parameters are determined from these texture characteristics. Said parameters indicate the location and 

^ the orientation of a directed structure in the digital image. 

(57) Zusammenfassung: Um den Ort un die Orientierung einer gerichteten Struktur in einem digitalen Bild automatisch erkennen 
zu konnen, schlagt die Erfindung ein Verfahren vor, bei dem das digitale Bild in vorzugsweise zusammenhangende Blocke unterteilt 
^5 wird und fiir jeden Block mindestens ein Texturmerkmal bestimmt wird, welches ein Mass fur die Strukturierung der Blocke entlang 
^ vorgegebener Vorzugsrichtungen darstellt und aus den Texturmerkmalen Parameter ermittelt werden, die den Ort und die Orientic- 
rung einer gerichteten SLruklur in dem digilalen Bild angeben. 
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Verfahren zur automatischen Erkennung einer gerichteten Struktur 



Die Erfindung betrifft ein Verfahren zur automatischen Erkennung eines 
Ortes und einer Orientierung einer gerichteten Struktur in einem digitalen 
Bild, insbesondere zur Bestimmung des Ortes und der Orientierung eines 
5 in dem digitalen Bild enthaltenen Barcodes. 

Es sind verschiedene Verfahren zur Erkennung und Lokalisierung gerich- 
teter Strukturen in Bildern bekannt. Beispielsweise gibt es Verfahren, bei 
denen aus einem Bild durch Anwendung eines Operators (z. B. eines 
Laplacian-of-Gaussian-Operators, kurz LoG-Operator) ein zweites Bild 
10 berechnet wird, dessen Pixelwerte nicht die Helligkeit, sondern den loka- 
len Kontrast am Ort der jeweiligen Pixel darstellen. In einem zweiten 
Schritt wird dann dieses zweite Bild daraufhin untersucht, ob es entlang 
im wesentlichen gerader und im wesentlichen paralleler Linien Pixel ent- 
halt, die hohe Werte aufweisen. 

15 Ein Nachteil solcher Methoden besteht in dem hohen Rechenaufwand, der 
aufwendige Recheneinheiten oder lange Auswertezeiten erfordert. Schon 
die Verwendung eines Operators kann fur viele Anwendungen zu aufwen- 
dig sein. Nochmehr gilt dies far die sich anschliefiende Auswertung des 
zweiten Bildes. 
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Andere Verfahren bestimmen innerhalb lokaler Bildbereiche die zweidi- 
mensionale Autokorrelationsfunktion (AKF) oder das zweidimensionale 
Fourierspektrum. Die Werte der AKF oder des Fourierspektrums werden 
daraufhin weiterverarbeitet, urn diese Informationen iiber die Strukturie- 
5 rung der zugehorigen Bereiche zu erhalten. Auch bei diesen Methoden ist 
der Rechenaufwand sehr hoch. 

Die angesprochenen gerichteten Strukturen in Bildern konnen auch Bar- 
codes sein. Diese Barcodes sind spezielle optische Codes, die beispiels- 
weise aus parallelen Strichen (Bars) unterschiedlicher Dicke bestehen, die 

10 durch Liicken (Spaces) unterschiedlicher Dicken voneinander getrennt 
sind. Die Abfolge der Dicken der Bars und Spaces stellen die im Barcode 
gespeicherte Information dar. Barcodes konnen auf Warenverpackungen 
und Etiketten aufgedruckt werden, oder zur direkten Markierung ver- 
schiedenster Produkte verwendet werden. Ein wesentliches Merkmal ist 

15 dabei die Maschinenlesbarkeit von Barcodes. Das heifit, dass es mit einer 
speziellen Apparatur (Barcodeleser) moglich ist, die in einem Barcode 
gespeicherte Information zuriickzugewinnen. 

Zur Lesung von Barcodes bestehen zur Zeit zwei grundsatzlich verschie- 
dene Verfahrensklassen. 

20 Bei der einen Klasse wird durch Abtasten der Vorlage mit einem Laser- 
strahl ein Zeitsignal gebildet, das von einer nachfolgenden Recheneinheit 
ausgewertet wird. Hierbei spricht man von einem sogenannten ID- 
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Verfahren. Bei Lesegeraten, die nach dem lD-Verfahren arbeiten, kann 
eine Lesung des Barcodes nur dann erfolgen, wenn der Laserstrahl den 
Barcode quer zu den Bars und Spaces schneidet. Wenn die relative Lage 
von Barcode und Lesegerat nicht von vornherein festliegt, eine Lesung 

5 des Codes aber dennoch ermoglicht werden soil Oageurabhangig), ist es 
erforderlich, die Vorlage entlang verschiedener Richtungen mehrfach ab- 
' zutasten (omnidirektionale Lesung). VorrichtungsgemaB wird dies iibli- 
cherweise mit bewegten Spiegeln erreicht, die den Laserstrahl so lenken, 
dass die Vorlage an verschiedenen Orten und entlang verschiedener Rich- 

10 tungen abgetastet wird, Nachteilig ist hierbei die Notwendigkeit bewegte 
Teile einzusetzen, wodurch sich unter anderem Einschrankungen bei der 
minimalen Baugrdfie und der Standzeit ergeben. 

Bei der anderen Klasse wird die Szene von einer mit einem elektronischen 
Sensor ausgestatteten Kamera aufgenommen und das auf den Sensor pro- 

15 jizierte Bild digitalisiert. Das digitale Bild wird dann zur Auswertung an 
eine Dekodiereinheit tibertragen (2D-Verfahren). Ein Vorteil von 2D- 
Verfahren besteht darin, dass man bei diesem Barcodeleser auf bewegte 
Teile verzichten kann. Ein weiterer Vorteil besteht darin, das in der De- 
kodiereinheit ein digitales Bild vorliegt, welches ein Abbild des Barcodes 

20 enthalt. 

Die Dekodiereinheit kann dabei wahlfrei auf die einzelnen Pixel des Bil- 
des zugreifen, wodurch die Klasse moglicher Dekodiermethoden wesent- 
lich erweitert wird. Insbesondere kann das gesamte Repertoire der Me- 
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thoden der digitalen Bildverarbeitung im Sinne einer Vorverarbeitimg des 
Bildes verwendet werden. Es lassen sich dadurch Fehler oder Storungen 
des Codes, die beispielsweise beim Druckprozess entstehen konnen, in 
gewissen Grenzen ausgleichen. 

5 Bei den 2D-Verfahren zur Codedekodierung kann man unterscheiden, ob 
eine Bestimmung des Ortes und der Orientierung des Barcodes im Bild 
vorgenommen wird (lokalisierende Verfahren) oder nicht. 

Lokalisierende Verfahren sind insbesondere dann vorteilbaft, wenn die 
Lage und/oder die Orientierung des Barcodes innerhalb des Sichtfeldes 
10 der Kamera nicht sicher vorausgesagt werden kann und der Barcode zu- 
dem gelesen werden soil (omnidirektionale Lesung). 

Bei nicht lokalisierenden Verfahren erzielt man die Fahigkeit zur omnidi- 
rektionalen Lesung durch Auswertung des Bildes entlang einer Vielzahl 
von virtuellen Scanlinien. Es wird also aus dem Bild ein ID-Signal gebil- 

15 det, indem die Grauwerte des Bildes an verschiedenen Orten entlang ver- 
schiedener Richtungen ausgelesen werden. Das so gebildete ID-Signal 
wird daraufhin mit grundsatzlich ahnlichen Verfahren ausgewertet, wie 
ein von einem Laserscanner generiertes ZeitsignaL Unvorteilhaft ist da- 
bei, dass die Grauwerte des Bildes entlang einer Vielzahl von Linien aus- 

20 gewertet werden und sich somit einerseits der Rechenaufwand verviel- 
facht und andererseits die Gefahr von Fehllesungen erhoht wird. 
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Bei einem bekannten Verfahren, das diese Nachteile durch eine Orts- und 
Lagebestimmung des Barcodes vermeidet, werden in der direkten Umge- 
bung des Barcodes zusatzliche Markierungen angebracht. Diese Markie- 
rnngen werden in einem ersten Schritt von einem entsprechend modifi- 

5 zierten Lesegerat erkannt. Da sich die Markierungen in einem vorbe- 
stimmten Abstand zum Barcode befmden, ist mit der Lokalisierung der 
Markierungen auch der Barcode lokalisiert. Bei diesem Verfahren ist es 
nachteilig, dass es bedruckte Markierungen erfordert. Da diese Markie- 
rungen nicht Bestandteil eines allgemein verbindlichen Standards sind, 

10 werden diese nicht durchgangig verwendet. 

AuBerdem benotigen die zusatzlichen Markierungen auch eine zusatzliche 
bedruckte Flache. Gerade bei der Markierung von Waren (E AN/UPC) ist 
die bedruckbare Flache als Werbemedium kostbar, weshalb sich die Ver- 
wendung zusatzlicher Markierungen bisher nicht durchsetzen konnte. 

15 Da Barcodes aus parallelen Strichen aufgebaut sind, stellen sie im Sinne 
der digitalen Bildverarbeitung gerichtete Strukturen dar und es ist prinzi- 
piell moglich, die aus der digitalen Bildverarbeitung stammenden Verfah- 
ren zur Lokalisierung gerichteter Strukturen (Texturanalyse) auch zur 
Lokalisierung von Barcodes einzusetzen. Diese Verfahren erfordern je- 

20 doch die Anwendung von speziellen Operatoren (z. B. LoG-Operator), 
die Bestimmung zweidimensionaler Korrelationsfunktionen oder die Be- 
stimmung des zweidimensionalen Fourier spektrums, also die Anwendung 
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rechenaufwendiger Algorithmen und sind deshalb zur Localisation von 
Barcodes nicht wirtschaftlich einsetzbar. 

Es ist somit Aufgabe vorliegender Erfindung, ein Verfahren bereitzustel- 
len, welches sich zur automatischen Erkennung eines Ortes und einer 0~ 
5 rientierung einer gerichteten Struktur in einem digitalen Bild, insbesonde- 
re zur Erkennung eines in einem digitalen Bild enthaltenen Barcodes, so- 
wie zur zumindest naherungsweise Bestimmung des Ortes und der Orien- 
tierung dieses Barcodes wirtschaftlich einsetzten lasst 

ErfindungsgemaB ist die obige Aufgabe dadurch gelost, dass in einem 
10 Verfahren zur automatischen Erkennung eines Ortes und einer Orientie- 
rung einer gerichteten Struktur in einem digitalen Bild, insbesondere zur 
Bestimmung des Ortes und der Orientierung eines in dem digitalen Bild 
enthaltenen Barcodes, das digitale Bild in vorzugsweise zusammenhan- 
gende Blocke unterteilt wird und fur jeden Block mindestens ein Textur- 
15 merkmal bestimmt wird, welches ein MaB fiir die Strukturierung der Blo- 
cke entlang vorgegebener Vorzugsrichtungen darstellt, und aus den Tex- 
turmerkmalen Parameter ermittelt werden, die den Ort und die Orientie- 
rung einer gerichteten Struktur in dem digitalen Bild angeben. 

Vorteilhafterweise ist das Bild dabei ein von einem kamerabasierten Co- 
20 delesegerat aufgenommenes Abbild einer realen Szene, die unter anderem 
einen Barcode enthalt. Uriter einem elektronisch vorliegenden oder digita- 
len Bild wird hierbei ein aus einer Matrix von Bildelementen (Pixeln) zu- 
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sammengesetztes Objekt verstanden, wobei jedem Pixel ein Ort (ubli- 
cherweise in Form eines Zeilenindex und des Spaltenindex) sowie ein die 
Helligkeit am Ort des Pixels kennzeichnender Wert (Wert des Pixels) zu- 
geordnet ist Es konnen aber auch auf andere Weise erzeugte, in elektro 
5 nischer Form vorliegender Bilder mit dem vorgestellten Verfahren auto- 
matisch analysiert werden. 

Besonders vorteilhaft bei dem erfindungsgemaBen Verfahren ist es, dass 
sich der Rechenaufwand gegeniiber bekannten Verfahren zur Lokalisie- 
rung gerichteter Strukturen, urn ein vielfaches reduziert. Die Anwendung 
10 dieses Verfahrens zur Lokalisierung von Barcodes wird durch diesen ver- 
ringerten Rechenaufwand wirtschaftlich sehr interessant. 

Einen weiteren Vorteil, den das erfindungsgemaBe Verfahren mit sich 
bringt, ist, dass keine zusatzlichen Markierungen hinsichtlich der Barcode 
aufweisenden Flache erforderlich sind, welche bei herkommlichen Ver- 
15 fahren zur Lokalisierung und Orientierungsbestimmung fur den Barcode 
benotigt wurden. Somit wird auch keine zusatzliche Flache fiir die Mar- 
kierungen benotigt, wodurch diese Flache als eventuelle W.erbeflache zur 
Verfiigung steht. Dies ist beispielsweise besonders interessant, wenn die 
Verpackung einer Ware relativ kiein ist. 

20 Vorteilhaft bei dem Verfahren ist ebenfalls, dass nach der Lokalisierung 
nur noch eine einzige Linie ausgewertet werden muss. 
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AuBerdem verringert die Konzentration auf diejenigen Bildbereiche, die 
mit hoher Wahischeinlichkeit Barcodes enthalten, die Gefahr von Fehlle- 
sungen. 

Zur vorteilhaften Lokalisierung einer gerichteten Struktur wird das digita- 
5 le Bild in Bereiche eingeteilt, die sogenannten Blocke. Hierbei sind die 
Blocke vorzugsweise zusammenhangend angeordnet. Um das Verfahren 
weiter zu vereinfachen ist es vorteilhaft, wenn die Blocke eine rechteckige 
Form, vorzugsweise eine quadratische Form, aufweisen. 

Eine Ausfiihrungsvariante des Verfahrens sieht vor, dass fur jeden dieser 
10 Blocke, wird vorzugsweise eine vorgegebene Anzahl von ersten rich- 
tungsempfindlichen Merkmalen, den sogenannten „Merkmalen erster 
Ordnung" berechnet. Diese „Merkmale erster Ordnung" werden im fol- 
genden auch als „erste Texturmerkmale" bezeichnet. 

Die Berechnungsvorschrift fiir diese „Merkmale erster Ordnung" wird 
15 dabei durch sogenannte Merkmalsfunktionen beschrieben. Eine Merk- 
malsfunktion ist eine Zuordnungsvorschrift, die einem Block in eindeuti- 
ger Weise eine Zahl zuordnet, Alle Merkmalsfunktionen sind dabei so 
gestaltet, dass einem Block um so hohere Werte zugeordnet werden, je 
groBer die Grauwertunterschiede des Blocks entlang einer vorbestimmten 
20 Vorzugsrichtung sind. Es wird also ein Satz von Merkmalsfunktionen 
festgelegt, wobei jeder der Merkmalsfunktionen aus diesem Satz eine 
Vorzugsrichtung zugeordnet werden kann, entlang der ein Bildblock aus- 
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gewertet wird. Dabei sind die Merkmalsfunktionen vorzugsweise so ges- 
taltet, dass die zugehorigen Vorzugsrichtungen die Gesamtheit aller Rich- 
tungen moglichst gleichmaBig abdecken. 

Insbesondere werden die Merkmalsfunktion so gewablt, dass je zwei be- 
5 liebig ausgewahlte verscbiedene Merkmalsfunktionen auch verschiedene 
Vorzugsricbtungen besitzen. Dabei wird ein „Merkmal erster Ordnung" 
durch Anwendung einer Merkmalsfunktion auf einem Block bestimmt. 
Man erhalt also fur jeden Block und fur jede Merkmalsfunktion einen 
Wert. 

10 Es ist vorteilhaft, wenn das Verhaltnis der Anzahl Pixel pro Block zu der 
Anzahl der Merkmalfunktionen deutlich groBer als 1 ist, weil dann die 
Anzahl der Merkmale pro Bild deutlich geringer ist als die Anzahl der 
Pixel des Bildes, wodurch sich die Komplexitat der nachfolgenden Be- 
rechnung wesentlich verringert. 

15 Urn nun zusatzlich Einsparungen an Rechenzeit imd Speicherzugriffzeit 
zu gewinnen, ist es vorteilhaft, jeweils nur einen Teil der Pixel eines 
Blocks auszuwerten. 

Man kann sich dabei die Merkmalsfunktion auch als eine „Messeinrich- 
tang" vorstellen, die die ^Aktivitat" eines Bildes oder eines Bildausschnit- 
20 tes entlang der Vorzugsrichtung misst. Das Texturmerkmal entspricht 
dann dem „Ausschlag" des richtungssensitiven Messgerates „Merkmals- 
funktion". Beinhaltet ein Block eine gerichtete Struktur, so wird ein Tex- 
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turmerkmal, das im wesentlichen parallel zu der Straktur verlauft, einen 
relativ geringen Wert aufweisen. Ein Merkmal, das im wesentlichen 
senkrecht zu der Struktur verlauft, wird hingegen einen relativ hohen 
Wert aufweisen. Eine gerichtete Struktur innerhalb eines Blockes wird 
5 also auf zwei verschiedene Weisen detektiert. 

Zum einen auBert sich eine gerichtete Struktur durch hohe Werte einer 
Merkmalsfunktion, deren Vorzugsrichtung im wesentlichen senkrecht zur 
Struktur steht. Zum anderen auBert sich eine gerichtete Struktur durch 
niedrige Werte einer Merkmalsfunktion, deren Vorzugsrichtung im we- 
10 sentlichen parallel zur Struktur verlauft. 

Dadurch ergeben sich bereits wenigstens zwei Moglichkeiten, eine gerich- 
tete Struktur in einem Block zu erkennen. Einerseits kann man besonders 
niedrige Werte eines Texturmerkmals als Hinweis auf das Vorliegen einer 
gerichteten Struktur entlang der zum Texturmerkmal gehorigen Vorzugs- 
15 richtung verwenden, andererseits kann man besonders hohe Werte eines 
Texturmerkmals als Hinweis auf das Vorliegen einer gerichteten Struktur 
senkrecht zur Vorzugsrichtung verwenden. 

Um den Einfluss ungerichteter Strukturen zu eliminieren, kann bei dem 
erfindungsgemaBen Verfahren aus je zwei „Merkmalen erster Ordnung", 
20 deren Merkmalsfunktionen sich durch im wesentlichen zueinander senk- 
recht stehende Vorzugsrichtungen auszeichnen, ein neues „zweites Tex- 
turmerkmal" bestimmt werden. Die Verkniipfung je zweier „Merkmale 
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erster Ordnung" wird dam vorzugsweise so gestaltet, dass das resultie- 
rende „zweite Texturmerkmal" hohe Werte annimmt, wenn der Wert des 
einen „Merkmals erster Ordnung" hoch und gleichzeitig der Wert des 
anderen „Merkmals erster Ordnung" niedrig ist Ein solchermafien durch 
5 Verrechnung zweier „Merkmale erster Ordnung" bestimmtes „zweites 
Texturmerkmal" wird im folgenden auch „Merkmal zweiter Ordnung" 
genannt. 

Ein „Merkmal zweiter Ordnung" nimmt also einen hohen Wert an, wenn 
beispielsweise der Block entlang der Vorzugsrichtung eine hohe Aktivitat 

10 und gleichzeitig senkrecht zur Vorzugsrichtung eine niedrige Aktivitat 
aufweist, Man erreicht auf diese Weise unter anderem, dass weder struk- 
turanne Bereiche noch ungerichtete strukturierte Bereiche zu einem hohen 
Wert eines „Merkmals zweiter Ordnung" und damit zu einer Fehlinter- 
pretation (vermeintliche Erkennung einer nicht vorhandenen gerichteten 

15 Struktur) fuhren konnen. 

Unter einem „Merkmal zweiter Ordnung" versteht man hierbei ein 
Merkmal, dessen Wert ein MaB fur die Wahrscheinlichkeit des Vorlie- 
gens einer gerichteten Struktur senkrecht zu einer Vorzugsrichtung dar- 
stellt, unabhangig davon, ob es durch Verrechnung zweier ,,Merkmale 
20 erster Ordnung" oder in einem einzigen Schritt berechnet wurde. 

Die jeweils zur gleichen Richtung gehorigen „zweiten Texturmerkmale" 
werden beispielsweise in sogenannten Merkmalskarten eingetragen, und 
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zwar vorzugsweise jeweils an dei Stelle, an der sich der zugehorige Block 
des Eingangsbildes befindet. Die Merkmalskarte ist hierbei beispielsweise 
ein verkleinertes Bild, deren Pixel vorzugsweise nicht mehr die Helligkeit 
des Ursprungsbildes, sondern die Wahrscheinlichkeit fiir das Vorliegen 
5 einer gerichteten Struktur einer bestimmten Richtung angeben. 

Vorteilhaft ist es dabei, dass vorzugsweise nicht jedem Pixel des Origi- 
nalbildes ein eigener Merkmalswert zugeordnet ist, sondern die verschie- 
denen Merkmalswerte zu den Blocken gehoren und somit die Merkmals- 
karte beispielsweise entsprechend kleiner ist, als das Originalbild. 

10 Vorteilhaft ist es weiter, dass sich die Auswertung vorzugsweise nur auf 
die vorher bestimmten Merkmale, nicht aber auf die Grauwerte des Bildes 
stiitzt. Damit lasst sich ein deutlich geringerer Rechenaufwand erreichen, 
als beispielsweise ein mit einem LoG-Operator erzeugtes Bild. Dies liegt 
einerseits an der Datenreduktion (die Anzahl der Merkmale ist geringer 

15 als die Anzahl der Pixel im Eingangsbild), andererseits liegt dies aber 
auch daran, dass die Merkmalsfunktionen so konstruiert sind, dass sie 
Riickschlusse auf die lokale Orientierung der einzelnen Bildbereiche zu- 
lassen. 

Durch diese Vorteile lassen sich Auswertungsergebnisse effizienter und 
20 damit wirtschaftlicher erreichen. Als Ergebnis dieses Verfahrens stehen 
unter anderem Parameter zur Verfugung, die eine Aussage liber den Ort 
und die Orientierung bzw. eine Winkellage einer gerichteten Struktur in 
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einem digitalen Bild angeben. Weiterhin kann durch die Parameter eine 
Wahrscheinlichkeit fur die Existenz einer gerichteten Struktur ermittelt 
werden. 

Eine Ausfuhrungsform sieht vor, zunachst diejenigen „Merkmale zweiter 
5 Ordnung" in vorzugsweise jeder Merkmalskarte zu Null zu setzen, deren 
Merkmalswerte beispielsweise unterhalb einer geeignet gewahlten 
Schwelle liegen, und zur weiteren Auswertung beispielsweise nur noch 
diejenigen Merkmale heranzuziehen, deren Wert echt positiv ist. Die Ho- 
ne der Schwelle hat im wesentlichen Einfluss auf die Detektionsempfind- 
10 lichkeit. 

Bei diesem Verfahren ist es vorteilhaft, eine niedrige Schwelle zu wahlen, 
wenn man beispielsweise auch gerichtete Strukturen mit geringem Kon- 
trast detektieren mochte. Umgekehrt ist es vorteilhaft, eine hohe Schwelle 
zu wahlen, wenn die zu erkennende Struktur beispielsweise einen hohen 
15 Kontrast hat (z. B. bei einem einwandfrei aufgedruckten Barcode), man 
aber gleichzeitig mit kontraststarken texturierten Storungen in der Umge- 
bung der gesuchten gerichteten Struktur rechnet. 

Dabei wird vorzugsweise zunachst von alien Merkmalskarten eine Merk- 
malskarte ausgewahlt, die mit hoher Wahrscheinlichkeit die Existenz ei- 
20 ner gerichteten Struktur im Bild anzeigt. Es ist auch vorteilhaft, diejeni- 
gen Merkmalskarten auszuwahlen, deren Werte beispielsweise den groG- 
ten Mittelwert aufweisen. Die so ausgewahlte „beste" Merkmalskarte 
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wird weiter untersucht, urn die Existenz einer gerichteten Struktur zu bes- 
tatigen oder zu verwerfen. Der Ort einer im Bild vorhandenen gerichteten 
Struktur kann durch die Bestimmung eines Lageparameters (z. B, Mittel- 
wert, gewichteter Mittelwert, Median) der Merkmalskarte geschatzt wer- 
5 den. Die Winkellage der gerichteten Struktur ergibt sich grob bereits aus 
der der ausgewahlten Merkmalskarte zugeordneten Vorzugsrichtung. Eine 
genauere Schatzung der Orientierung der Struktur wird durch vorzugs- 
weise die Anwendung eines Regressionsverfahrens aus der Merkmalskar- 
te ermittelt. 

10 Vorteilhaft fur die Bestimmung der Merkmalskarte erster Ordnung ist un- 
ter anderem eine blockweise Auswertung von Grauwertdifferenzen von 
Bildpunktpaaren entlang der gewahlten Vorzugsrichtung, weil diese Me- 
thode beispielsweise gegeniiber der Bildung der zweidimensionalen Auto- 
korrelationsfunktion oder der des zweidimensionalen Fourierspektrums 

15 mit deutlich geringerem Rechenaufwand implementierbar ist. 

Um den Rechen- sowie den Zeitaufwand weiter zu minimieren, ist es vor- 
teilhaft, bei der Auswertung der Texturmerkmale zunachst diejenigen 
Vorzugsrichtungen auszuwahlen, deren zugehorige Texturmerkmale sich 
am besten mit der Existenz der gerichteten Struktur im Bild erklaren las- 
20 sen. Durch dieses Verfahren lasst sich der Datenaufwand weiterhin 
reduzieren. 
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Weitere Vorteile, Ziele und Eigenschaften vorliegender Erfindung werden 
anhand nachfolgender Erlauterungen anliegender Zeichnung dargestellt, 
in welcher beispielhaft das Erkennungsverfahren dargestellt ist. 

Es zeigt, 

5 die Figur eine schematische Darstellung des Erkennungsverfahrens an- 
hand eines Ausfuhrungsbeispieles. 

In dem Ausfuhrungsbeispiel, welches in der Figur dargestellt ist, ist eine 
BUdaufhahmeeinheit mit einer Recheneinheit verbunden. Die Bildaufhah- 
meeinheit liefert dabei ein digitalisiertes Bild der GroBe 640 x 480 Bild- 
10 punkte mit typischerweise 256 Graustufen an die Recheneinheit, 

Das Bild wird danach zuerst in 20 x 15 nicht iiberlappende Blocke der 
GroBe 32 x 32 Bildpunkte eingeteilt. Weiter werden fiir jeden dieser Blo- 
cke vier „Merkmale erster Ordnung" bestimmt. Dabei wird die Berech- 
nungsvorschrift jeden „Merkmal erster Ordnung" durch jeweils eine 
15 Merkmalsfunktion beschrieben. 

Jede Merkmalsfunktion weist dabei jedem Bildblock in eindeutiger Weise 
eine Zahl zu, und ist jeweils durch zwei Parameter festgelegt, und zwar 
durch 

1 . einen sogenannten Cliquenvektor (Delta_x, Delta^y) 
20 2. ein Increment DSAMPLE. 
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Die Komponenten des Cliquenvektors sind dabei ganzzahlig (positiv oder 
negativ), und das Inkrement DS AMPLE ist eine naturliche Zahl. 

Zur Bestimmung eines Merkmals erster Ordnung werden alle Bildpunkt- 
paare ( (x u y x ), (x 2 ,y^j ) gebildet, die die folgenden Bedingungen gleich- 
5 zeitig erfullen: 

1. sie liegen vollstandig innerhalb des betrachteten Blocks, 

2. es gilt x x - x 2 = Delta_x und y x - y 2 = Delta_y , 

3. x x und y x sind durch DS AMPLE teilbai. 

Dabei besagt die Bedingung 2, dass sich die Bildpunktpaare dadurch aus- 
10 zeichnen, dass zum einen die Verbindungslinie zwischen den Bildpunkten 
des Paares entlang der durch den Cliquenvektor gegebenen Vorzugsrich- 
tung lauft und dass zum anderen der Abstand von je zwei Punkten eines 
Punktpaares konstant ist. 

Bedingung 3 erlaubt es, nur einen Teil der nach Bedingung 2 innerhalb 
15 eines Blocks moglichen Punktpaare auszuwahlen und ermoglicht damit 
eine Reduktion des Rechenaufwandes zur Bestimmung des jeweiligen 
Texturmerkmals. 

Als nachster Schritt wird das „Merkmal erster Ordnung" bestimmt. Dabei 
wird fiir jedes Bildpunktpaar, das die obigen Bedingungen erfiillt, der Ab- 
20 solutbetrag der Differenz oder das Quadrat der Differenz zwischen den 
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Grauwerten der beiden Punkte ermittelt. AnschlieBend werden die so er- 
haltenen Werte summiert 

Beim Implementierungsbeispiel werden vier Cliquenvektoren verwendet, 
namlich 

5 c x = (3 ,0) (dies ist die waagerechte Vorzugsrichtung) , 
(0,3) (dies ist die senkrechte Vorzugsrichtung), 
c 3 = (2,2) (dies ist die diagonale Vorzugsrichtung), 
c 4 = (-2,2) (dies ist die antidiagonale Vorzugsrichtung). 

Dabei wird DSAMPLE zu 4 gesetzt, wodurch sich eine Einsparung an 
10 Rechenzeit von ungefahr 16 gegeniiber einem DSAMPLE-Wert von 1 er- 
gibt. 

In einem nachsten Schritt werden die „Merkmale erster Ordnung" in so- 
genannte Merkmalskarten eingetragen. 

Bei dem Implementierungsbeispiel werden die so erhaltenen „Merkmale 
15 erster Ordnung" also in vier (Anzahl Cliquenvektoren) Merkmalskarten 
eingetragen, die jeweils die GroBe 20 x 15 (Anzahl Blocke = Anzahl 
Merkmale pro Cliquenvektor) besitzen. 

Im folgenden werden die „ Merkmalskarten erster Ordnung" mit Tju(x,y) 
bezeichnet, wobei n die Werte 1 bis 4, x die Werte 1 bis 20 und y die 
20 Werte 1 bis 15 annehmen. So bezeichnet beispielsweise TJ2(3,4) das 
„Merkmal erster Ordnung", fur den dritten Block von links in der vierten 
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Zeile fiir den Cliquenvektor c^. Das Merkmal TJ(3,4) gibt in diesem 
Beispiel die Aktivitat des Blocks an der Position (3,4) entlang einer senk- 
rechten Richtung an. 

In einem weiteren Schritt werden aus den „Merkmalskarten erster Ord- 
5 nung" die „Merkmalskarten der zweiten Ordnung" bestimmt. 

Zur Bestinnniing einer „Merkmalskarte zweiter Ordnung" MJ wird je- 
weils eine „Merkmalskarte erster Ordnung" TJ mit einer weiteren 
„Merkmalskarte erster Ordnung" TJ verrechnet. Die Verrechnung wird 
dabei mit einer Merkmalskarte T J vorgenommen, deren Cliquenvektor Cj 
10 senkrecht zum Cliquenvektor o { der „Merkmalskarte erster Ordnung" 
steht. 

Im Beispiel stehen jeweils c l und bzw. C3 und c 4 senkrecht aufeinander. 
Die Art der Verrechnung wird durch zwei Parameter FAKTOR und 
SCHWELLE festgelegt und erfolgt blockweise wie nachstehend beschrie- 
15 ben. Zuerst werden die „Merkmalskarten zweiter Ordnung" folgender- 
maBen bestimmt: 

MJ (x,y) - TJ (x,y) - FAKTOR * TJ (x,y), 
MJ (x 5 y) = T J (x,y) - FAKTOR * TJ (x,y), 
20 MJ (x,y) = TJ (x,y) - FAKTOR * TJ (x,y), 
MJ (x,y) = TJ (x,y) - FAKTOR * T J (x,y). 
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In einem nachsten Schritt wird der Schwellenwert festgelegt, der von der 
jeweiligen Anwendung abhangt. Dabei ist der Schwellenwert im wesentli- 
chen von der gewahlten Blockgrofie und der Grauwertauflosung des Ori- 
ginalbildes beeinflusst. In diesem Schritt werden alle Eintrage in alien 
5 Merkmalskarten zu Null gesetzt, falls sie kleiner als eben dieser Schwel- 
lenwert sind. 

Typische Werte fur den Faktor liegen dabei im Bereich 1,5 ...2,5. Da- 
nach werden die Merkmalskarten sortiert. Dies geschieht derart, dass fur 
jede Merkmalskarte die Anzahl der von Null verschiedenen Eintrage ge- 
10 zahlt wird und die Merkmalskarten nach dieser Anzahl in absteigender 
Reihenfolge sortiert werden. Somit erhalt die erste der Merkmalskarten in 
der Liste die meisten von Null verschiedenen Eintrage und wird daher als 
erster Kandidat beriicksichtigt 

Danach wird der Schwerpunkt der zu betrachtenden Merkmalskarten (das 
15 erste Moment in x- und y-Richtung) bestimmt. Der Schwerpunkt (x s , y s ) 
besitzt dabei reellwertige Koordinaten im Bereich Xg = 1 ...20, y s = \ 
...15 und wird auf ganzzahlige Werte round (x s , y s ) gerundet. 

Wenn die betrachtete Merkmalskarte an der Stelle round (x s , y^ einem 
von Null verschiedenen Wert enthalt, wird mit dieser Merkmalskarte als 
20 aktueller Karte fortgefahren. 

Wenn die betrachtete Merkmalskarte anstelle round (Xg, y^ hingegen eine 
Null enthalt, wird der Schwerpunkt der nachsten Merkmalskarte von der 
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Liste ermittelt. Es wird dann iiberpruft, ob diese Karte an der Stelle des 
Schwerpunktes einen von Null verschiedenen Wert enthalt. 

Auf diese Weise werden alle Kandidaten der Liste abgearbeitet, bis ent- 
weder eine Karte gefimden wurde, die an der Stelle des Schwerpunktes 
5 einen von Null verschiedenen Wert enthalt oder bis die Liste ohne Erfolg 
abgearbeitet wurde. 

Im letzteren Fall wird das Verfahren beendet, da keine gerichtete Struktur 
gefanden wurde. 

Ansonsten wird aus dem Schwerpunkt (x s , der aktuellen Merkmalskar- 
10 te durch Skalierung mit der BlockgroBe der Mittelpunkt des Barcodes 
(bezogen auf die Grofie des Originalbildes) ermittelt. Fur die Merkmals- 
karte wird durch lineare Regression eine durch den Schwerpunkt (x s , 
laufende Ausgleichsgerade bestimmt. 

Diese Ausgleichsgerade verlauft im wesentlichen senkrecht durch die ge- 
15 richtete Struktur. Wenn die gerichtete Struktur nun ein Barcode ist, der 
decodiert werden soli, kann diese Gerade als virtuelle Scanlinie verwen- 
det werden, da sie mit hoher Wahrscheinlichkeit den Barcode vollstandig 
schneidet. 

Das hier beschriebene Verfahren zur automatischen Erkennung eines Or- 
20 tes und einer Orientierung einer gerichteten Struktur in einem digitalen 
. Bild zeichnet sich durch die Datenreduktion der im Ursprungsbild enthal- 
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tenen Daten aus, sodass ein wesentlich geringerer Rechenaufwand betrie- 
ben werden muss, urn eine gerichtete Struktur lokalisieren zu konnen. 
Dabei ist es vorteilhaft, dass das digitale Bild in aneinanderliegenden Bid- 
cken aufgeteilt wird und diese Blocke durch Merkmalsfiinktionen be- 
5 schrieben werden, sodass nicht jedes einzelne Pixel im Eingangsbild in 
die Berechnung eingeht, sondern nur die Anzahl der Texturmerkmale. 

Weiterhin ist vorteilhaft, dass die Moglichkeit von Fehllesungen dadurch 
verringert wird, dass das Verfahren es beispielsweise ermoglicht, sich auf 
diejenigen Bildbereiche zu konzentrieren, die mit hoher Wahrscheinlich- 
10 keit einen Barcode enthalten. 
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Patentanspriiche: 

1. Verfahren zur automatischen Erkennung eines Ortes und einer Ori- 
entierung einer gerichteten Struktur in einem digitalen Bild, insbe- 
sondere zur Bestimmung des Ortes und der Orientierung eines in 

5 dem digitalen Bild enthaltenen Barcodes, dadurch gekennzeichnet, 

doss das digitale Bild in vorzugsweise zusammenhangende Blocke 
unterteilt wird, und fiir jeden Block mindestens ein Texturmerkmal 
bestimmt wird, welches ein MaB fiir die Strukturierung der Blocke 
entlang vorgegebener Vorzugsrichtungen darstellt, und aus den 

10 Texturmerkmalen Parameter ermittelt werden, die den Ort und die 

Orientierung einer gerichteten Struktur in dem digitalen Bild ange- 
ben. 

2. Erkennungsverfahren nach Anspruch 1, dadurch gekennzeichnet, 
dass die Blocke eine rechteckige, vorzugsweise quadratische Form 

15 aufweisen. 

3. Erkennungsverfahren nach einem der Anspriiche 1 oder 2, dadurch 
gekennzeichnet, dass fiir jeden Bildblock mehrere „erste Textur- 
merkmale" bestimmt werden, die einen um so hoheren Wert an- 
nehmen, je groBer die Summe der absoluten Betrage der Grauwert- 

20 differenz von Bildpunktpaaren ausfallt, wobei die Bildpunktpaare 

fiir jedes „erste Texturmerkmal" aus Bildpunkten gebildet werden, 
die innerhalb des betrachteten Blocks liegen, deren Verbindungsli- 
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nie entlang der dem betrachtetem „ersten Texturmerkmal" zuge- 
ordneten Vorzugsrichtung liegen, und deren Abstand einem festge- 
legten Wert oder einen Wert aus einer festgelegten Menge von 
Werten entspricht. 

5 4. Erkeinmngsverfahren nach Anspruch 3, dadurch gekennzeichnet, 
doss nur ein Anteil der Bildpunkte innerhalb des betrachteten 
Blocks, deren Verbindungslinie entlang der zugeordneten Vorzugs- 
richtung liegen und deren Bttdpunktabstand einem festgelegten 
Wert oder einem Wert aus einer festgelegten Menge von Werten 

10 entsprechen, ausgewertet werden. 

5. Erkennungsverfahren nach einem der Anspriiche 1 bis 4, dadurch 
gekennzeichnet, doss zur Bestimmung des Wertes eines „zweiten 
Texturmerkmals" eines Blocks die Werte von zwei „ersten Tex- 
turmerkmalen" des gleichen Blocks herangezogen werden, die ein 

15 MaB fur die Strukturierung des Blockes entlang zweier im wesentli- 

chen senkrecht zueinander stehenden Vorzugsrichtungen angeben. 

6. Erkennungsverfahren nach einem der Anspriiche 1 bis 5, dadurch 
gekennzeichnet, dass die berechneten „ersten Texturmerkmale" 
ausgewertet werden. 

20 7. Erkennungsverfahren nach einem der Anspriiche 1 bis 6, dadurch 
gekennzeichnet, dass bei der Auswertung der Texturmerkmale zu- 
nachst diejenige Vorzugsrichtung ausgewahlt wird, deren zugehori- 
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ge Texturmerkmale sich am besten mit der Existenz einer gerichte- 
ten Struktur im Bild erkennen lasst mid bei dem daraufhin nur die- 
jenigen Texturmerkmale, die zu der ausgewahlten Vorzugsrichtung 
gehoren, zur Bestinunung der Parameter, die die Wahrscheinlich- 
keit fur die Existenz einer gerichteten Struktur und/oder den Ort ei- 
ner gerichteten Struktur und/oder die Lage einer gerichteten Struk- 
tur im Digitalbild angeben, herangezogen werden. 

8. Erkennungsverfahren nach einem der Anspriiche 1 bis 7, dadurch 
gekennzeichnet, doss das Bild in tiberlappende Bereiche eingeteilt 
wird. 

9. Erkennungsverfahren nach einem der Anspriiche 1 bis 8, dadurch 
gekennzeichnet, dass zur Einstellung der Detektionsempfmdlichkeit 
ein Schwellenwert bei der Auswertung der Texturmerkmale festge- 
legt wird. 

10. Erkennungsverfahren nach einem der Anspriiche 1 bis 9, dadurch 
gekennzeichnet, dass die Parameter eine Wahrscheinlichkeit fiir die 
Existenz einer gerichteten Struktur in dem digitalen Bild angeben. 
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und 256 Graustufen 



J/1- 

Fig. 



1 



Bestimmung der Merkmalskarten 

zweiter Ordnung aus den 
Merkmalskarten erster Ordnung 



Aufteilung des Bildes 
in 20 x 15 nicht uberlappende 
Blocke 
mit jeweils 32 x 32 Pixel 



Schwellenwert festlegen; 
Sind die Werte < Schwelle 
=> Wert = Null setzen 



Bestimmung von vier Merkmalen 
pro Block, deren Berechnungs- 
vorschrift durch Merkmalsfunkt. 
beschrieben werden 



Parameter der Merkmalsfunktion 

1. Cliquenvektor (Delta_x, Delta_y) 

hier: d, c2, c3, c4 

2. Inkrement DS AMPLE 

hier DSAMPLE=4 



Biidung aiier Bildpunktpaare 
((x1,y1) f (x2,y2)) 

i) alle innerhalb des Blocks 

ii) x1-x2=Delta_x, y1-y2=Delta_y 
Hi) x1 und y1 teilbard. DSAMPLE 



Biidung der Werte der Merkmale 
erster Ordnung 



Eintragen der Merkmale erster 
Ordnung in die Merkmalskarten 
hier: 4 Merkmalskarten 
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Sortieren der Merkmalskarten 



Bestimmung des Schwerpunktes 
der einzelnen Merkmalskarten im 
' ' Bereich 
Xs= 1...20; Ys=1...15 



Auswertung der Werte der 
einzelnen Merkmalskarten 
Falls alle Werte=Null => Abbruch 

■ Sonst weiten 



Durch lineare Regression wird 
eine durch den Schwerpunkt 
laufende Ausgleichsgerade 
bestimmt 
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Barcode vollstandig und wird als 
virtuelle Scanlinie venwendet 
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